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DaitnlerChrysler AG Bopple 



Darstellungsbere ich eines automobilen Nachtsichtsvstems 



Die Erfindung betrifft ein Verfahren zur Umgebungser fas sung 
mittels eines automobilen Nachtsicht systems mehrere Bereiche 
umf assend. 

Es gibt bereits erste kommerziell erhaltliche Fahrer- 
Assistenzsysteme die dem Fahrer bei schlechtem Wetter oder 
bei Dunkelheit die Sicht verbessern. Dabei handelt es sich um 
Nachtsichtsysteme bei denen mittels eines Inf rarotsensors die 
vorausliegende Fahrzeugumgebung erfasst wird. Die erfassten 
Umgebungsdaten werden mit einer Datenverarbeitungseinheit zu 
einem Bild verarbeitet und dem Fahrer im Fahrzeug auf einer 
optischen Anzeige dargestellt. Wobei der Fahrer zur Informa- 
tionsaufnahme auf die optische Anzeige blickt xind ggf. ge- 
fahrliche Verkehrssituationen erkennen kann. 

In IEEE Computer Graphics and Applications, Septem- 
ber/Oktober, 1999, Seite 6 : "Night Vision: Infrared Takes to 
the Road" wird ein automobiles Nachtsicht system vorgestellt, 
welches eine Inf rarotkamera und ein Head-Up -Display umf asst. 
Wobei mit dem Head-Up-Display die mittels der Inf rarotkamera 
detektierten, dem Fahrzeug vorausliegenden, Umgebungsdaten 
virtuell auf die Windschutzscheibe projiziert werden. Wobei 
das System dem Fahrer eine drei- bis funffach hohere Sicht- 
weite gegeniiber der bei Abblendlicht typischen Sichtweite er- 
moglicht. Wodurch sich bei einer Fahrtgeschwindigkeit von 60 
Meilen pro Stunde die maximale Reaktionszeit bei Abblendlicht 
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von 3.5 Sekianden auf eine Reaktionszeit von 17.5 Sekunden bei 
Nachtsicht erhoht. 

Auf der Internetseite der Toyota Motor Corporation 
(www.to yota.co.ip/Showroom/ All tovota lineup/LandCruiserCygnu 
s/ safet y/index . html ) wird ein System zur UnterstiitzTing des 
Sehvermogens des Fahrers bei Nachtfahrten vorgestellt. Dabei 
wird mittels einer im Nahinf raroten en^f indlichen Kamera die 
Umgebung erfasst und dem Fahrer auf einem Head-Up-Dispaly an- 
gezeigt. Das System zeigt bei Abblendlicht den dem Lichtkegel 
des Fahrzeugs vorausliegenden, schwer erkennbaren StraSenver- 
lauf sowie sich in der Umgebung befindliche Personen, Fahr- 
zeuge und Hindernisse an. Dem Lichtkegel des Abblendlichts 
schlielSt sich dazu ein mit dem Nachtsicht system erkennbarer 
Bereich an. Der auswertbare Bereich liegt idealerweise bei 
etwa 100m und reicht maximal bis ca. 150m. Das System dient 
insbesondere als Assistent fur die Fernsicht, in Situationen 
bei denen man nicht mit Fernlicht fahren kann. Das System 
stent dem Fahrer bei Fernlichtf ahrt vorausliegende Informa- 
tionen dadurch bereit, dass in direkter Sicht schwer erkenn- 
bare Gegenstande abgebildet werden. Durch die Verwendung von 
Nahinfrarotstrahlen kann das System den StralSenzustand, auf 
die Strafie gefallene Gegenstande und andere StraSeninf ormati- 
onen anzeigen. Dem Lichtkegel des Fernlichts, welches mit ei- 
ner Reichweite von in etwa 180m angegeben wird, schliefit sich 
dazu der mit dem Nachtsicht system erfassbare Bereich an. Der 
erfassbare Bereich liegt bei ungefShr 200m und wird maximal 
mit ca. 250m angegeben. Alle bisher kommerziell verfiigbaren 
Nachtsichtsysteme sind derart ausgelegt, dass sie Objekte in 
moglichst grofier Entfernung anzeigen konnen. Sie bergen je- 
doch die groSe Gefahr, dass der Fahrer in Situationen 
schlechter Sicht oder bei Dunkelheit dazu verleitet wird, 
schneller zu Fahren als dies ohne Nachtsichtsystem moglich 
ist . 
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Der Erfindiing liegt deshalb die Aufgabe zu Griinde, ein Ver- 
fahren zur Umgebungserf assung mittels eines automobilen 
Nachtsichtsystems zu schaffen, womit dem Fahrer vorausliegen- 
de Umgebungsinformation angezeigt wird, ohne dabei zu einem 
Blindflug zu verleiten. 

Die Aufgabe wird gemaS der Erfindung durch ein Verfahren mit 
den Merkmalen des Patentanspruch 1 gelost. Vorteilhafte Aus- 
gestaltungen und Weiterbildungen der Erfindung werden in den 
Unteranspruchen auf gezeigt . 

GemalS der Erfindung wird ein Verfahren zur Umgebungserf as sung 
mittels eines automobilen Nachtsichtsystems bereitgestellt . 
Zur Erf assung von Umgebungsdaten umfasst das System mehrere 
Bereiche. Dazu gehoren ein Erfassungsbereich, worin das 
Nachtsichtsystem fiir optische Strahlung nichtsichtbarerer IR- 
Wellenlange empfindlich ist und Umgebungsdaten erfasst wer- 
den. Weiterhin umfasst das System einen Darstellungsbereich, 
wobei die darin mit dem Nachtsichtsystems erfassten Umge- 
bungsdaten dem Fahrer auf einer optischen Anzeige dargestellt 
werden. In einer erf inderischen Weise umfasst der Darstel- 
lungsbereich des Nachtsichtsystems dabei maximal den Lichtke- 
gel des Femlichtbereichs des Fahrzeugs. Aufgmnd der Ein- 
schrankung des Darstellungsbereichs werden dem Fahrer nur 
diejenigen Umgebungsdaten angezeigt, die er bei Aktivierung 
des konventionellen Femlichts ohnehin sehen wurde. 

In besonders vorteilhaf ter Weise umfasst das System einen 
Auswertebereich, innerhalb dem die mittels dem Nachtsichtsys- 
tem erfassten Umgebungsdaten einer Auswertung, insbesondere 
einer Objekterkennung, unterzogen werden. 

In einer weiteren vorteilhaf ten Weise schlieSt sich dem Dar- 
stellungsbereich des Nachtsichtsystems ein Toleranzbereich 
an. Wobei diejenigen Umgebungsdaten die der Toleranzbereich 
umfasst, dem Fahrer ebenfalls mittels der optischen Anzeige 
dargestellt werden. In einer Ausfikhrungsform der Erfindung 
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ist vorgesehen, dass der Toleranzbereich fest vorgegeben 
wird. Wobei ein Toleranzbereich einerseits deshalb vorteil- 
haft ist, da zwischen dem Fenilichtbereich iind dem Erfas- 
svingsbereich keine scharfe Trennlinie existiert. Andererseits 
kann aufgrund der Winkelbereiche der Kamera, wobei jedes Pi- 
xel einer Rautnrichtung entspricht, die Grenze des Fernlicht- 
bereichs nicht mit ausreichender Genauigkeit festgelegt wer- 
den. Es ist aber auch denkbar den Toleranzbereich aufgrrond 
weiterer Fahrzeug- oder UmgebungsgrdlSen, beispielsweise der 
Fahrtgeschwindigkeit, automat isch zu steuern. In einer beson- 
ders bevorzugten Ausfuhrungsform der Erfindung wird der Tole- 
ranzbereich jedoch in Abhangigkeit der Auswertung der Umge- 
bungsdaten eingestellt. Beispielsweise wird der Toleranzbe- 
reich dann automatisch erweitert, wenn ein Objekt nur Teil- 
weise im aktuellen Darstellungsbereich liegt. Der Toleranzbe- 
reich wird hierbei derart erweitert, dass ein Objekt voll- 
standig vora Darstellxingsbereich und Toleranzbereich utnfasst 
wird. 

In Fahrtrichtung des Fahrzeugs utnfasst der Darstellungsbe- 
reich wenigstens einen Teil des Abblendlichtbereichs . Wobei 
bevorzugt Objekte im Bereich direkt vor dem Fahrzeug nicht 
dargestellt werden, da der Fahrer diese Objekte auch ohne 
Nachtsicht system einsehen kann. Eine seitliche Begrenzxmg des 
Darstellungsbereichs erfolgt dabei nicht notwendigerweise . 
Wobei der Of fnungswinkel des Nachtsichtsystems bevorzugt der- 
art gewahlt ist, dass dieser die Keule des Femlichtbereichs 
seitlich nicht durchdringt. 

Der Auswertebereich des Nachtsichtsystems ist in vorteilhaf- 
ter Weise derart ausgelegt, so dass dieser wenigstens den 
Fernlichtbereich des Fahrzeugs umfasst. Zur Auswertung werden 
die im Auswertebereich erfassten Umgebungsdaten sodann mit- 
tels einer Datenverarbeitungseinheit in Verbindung mit Metho- 
den der Bildverarbeitung und Klassif ikation einer Objekter- 
kennung unterzogen. Falls sich die erkannten Objekte nur 
teilweise im Auswertebereich befinden, wird in einer vorteil- 
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haften Weise der Auswertebereich automatisch erweitert. Dazu 
kann beispielsweise festgestellt werden ob eine geschlossene 
Objektkontur vorliegt. Der Auswertebereich wird dabei solange 
erweitert bis ein Objekt vollstandig ausgewertet wurde. In 
5 einer besonders vorteilhaf ten Weise ist der Auswertebereich 
jedoch so ausgelegt , ' dass dieser den gesamten Erfassungsbe- 
reich des Nachtsichtsystems umfasst, womit auch in groSer 
Entfemung befindliche Objekte detektiert werden konnen. In 
einer gewinnbringenden Weise ist es auch denkbar dass dieje- 
10 nigen Objekte die sich direkt vor dem Fahrzeug befinden nicht 
erkannt werden, um bei der Auswertung Rechenzeit zu sparen. 

In einer gewinnbringenden Ausfiihrungsf orm der Erfindung wer- 
den die mittels der Auswertung im Darstellungsbereich detek- 
15 tierten Objekte bei der Darstellung hervorgehoben. Dazu bie- 
tet es sich bevorzugt an, die Objekte einzufarben. Wobei es 
vorteilhaf t ist, die detektierten Objekte zuvor einer Klassi- 
fikation zu xmterziehen und diese anschliefiend anhand ihrer 
Klassenzugehorigkei t ( z . B . Fufiganger , Fahr zeuge , . . . ) unter- 
20 schiedlich einzufarben, Auch ware es denkbar lediglich die 
Objektkontur darzustellen und diese entsprechend einzufarben. 

In einer weiteren gewinnbringenden Ausfiihrungsf orm der Erf in- 
I dung wird die Information uber die bei der Auswertung im Aus- 
r25 wertebereich detektierten Objekte zur weiteren Auswertung 
Fahrzeug- internen Systemen zur Verfiigung gestellt. Die Infor- 
mation kann dabei beispielsweise dazu dienen, um Sicherheits- 
relevante Systeme fruhzeitig zu aktivieren oder fiir eine Ak- 
tivierung vorzubereiten. 

30 

Weitere Merkmale und Vorteile der Erfindung ergeben sich aus 
den folgenden Beschreibimgen von Ausfuhrungsbeispielen anhand 
der Figuren. Wobei die Figuren nicht alle moglichen Varianten 
der Erfindung aufzeigen, weitere Varianten ergeben sich ins- 
35 besondere in vorteilhaf ter Weise bei der Kombination. 
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Dabei zeigen: 

Fig. 1 Darstellungsbereich des Nachtsichtsystems, welcher 
den Abblendlicht- und Fernlichtbereich vollstandig 
umf asst . 

Fig. 2 Darstellimgsbereich des Nachtsichtsystems, welcher 

den Fernlichtbereich und einen seitliche Toleranzbe- 

reiche umf asst. 
Fig. 3 Darstellxingsbereich des Nachtsichtsystems, welcher 

den Abblendlicht- und Fernlichtbereich teilweise um- 

fasst . 

Fig. 4 DarstellTongsbereich des Nachtsichtsystems, welcher 
den Fernlichtbereich und einen in Fahrtrichtiang zu- 
satzlichen Toleranzbereich umf asst. 

In Fig.l wird beispielhaft der Darstellungsbereich des erfin- 
dungsgemaSen Automobilen Nachtsichtsystems (4) dargestellt. 
Dabei umfasst der Darstellxingsbereich (einfach schraffiert 
dargestellt) den Abblendlichtbereich (1) und den Fernlichtbe- 
reich (2) vollstandig. Wobei sich der Darstellungsbereich in 
Pahrtrichtung bis zur Grenze zwischen dem Fernlichtbereich 
(2) und dem Erf assungsbereich (3) erstreckt . 

Pig. 2 zeigt den Darstellungsbereich des Automobilen Nacht- 
sichtsystems (4), wobei hierbei gegenGber dem in Fig.l ge- 
zeigten Darstellungsbereich keine seitliche Begrenzung auf 
den Fernlichtbereich (2) erfolgt, Der Of fnungswinkel der Ka- 
mera ist derart gewahlt, dass sich seitlich an den Fernlicht- 
bereich (2) Toleranzbereiche (doppelt schraffiert darge- 
stellt) anschlieSen. 
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In Fig. 3 ist das Nachtsicht system (4) derart ausgelegt, dass 
sich der Darstellungsbereich gegenuber dem in Fig.l aufge- 
zeigten Darstellungsbereich dadurch unterscheidet , dass die- 
5 ser bevorzugt nur einen Teil des Abblendlichtbereichs (1) um- 
fasst. Zudem wird hier der Toleranzbereich seitlich begrenzt, 
wobei der Of fnungswinkel des Nachtsichtsystems (4) derart ge- 
wahlt ist, dass dieser die Keule des Fernlichtbereichs nicht 
durchdringt . 

10 

Pig. 4 zeigt beispielhaft eine weitere Variante des Darstel- 
lungsbereichs , wobei dieser gegenuber dem in Fig. 3 angegebe- 
nen Darstellungsbereich einen grofieren Toleranzbereich auf- 
weist. Der Darstellimgsbereich endet hierbei nicht an der 
Grenze zwischen dem Femlichtbereich (2) und dem Erfassungs- 
bereich (3) sondem erstreckt sich in Fahrtrichtxing waiter in 
den Erfassiangsbereich (3) hinein. 
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Daimler Chrysler AG 



Patentanspruche 



1. Verfahren zur Umgebungserf assung mittels eines automobi- 
len Nachtsichtsystems mehrere Bereiche umfassend, 
einen Erf assungsbereich worin das Nachtsichtsystem we- 
nigstens fur optische Strahlung im IR-Wellenlangenbereich 
empf indlich ist und Umgebungsdaten erfasst, 

und einen Darstellungsbereich, wobei Information von den 

darin erfassten Umgebungsdaten mittels einer Anzeigeein- 

richtung optisch dargestellt wird, 

dadurch gekennzeichnet, 

dass der Darstellungsbereich maximal den Fernlichtbereich 

des Fahrzeugs umf asst . 

2. Verfahren nach Anspruch 1, 

dadurch gekennzeichnet, 
dass ein Auswertebereich vorgesehen ist, innerhalb dem 
die mittels dem Nachtsichtsystem erfassten Umgebungsdaten 
einer Auswertung, insbesondere einer Obj ekterkennung, un- 
terzogen werden. 

3. Verfahren nach einem der vorhergehenden Anspruche, 

dadurch gekennzeichnet, 

dass sich dem Darstellungsbereich ein Toleranzbereich an- 
schlielSt . 
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4. Verfahren nach einem der vorhergehenden Anspruche, 
dadurch gekennzeichnet, 

dass der Darstellxingsbereich wenigstens einen Teil des 
Abblendlichtbereichs umfasst. 

5. Verfahren nach einem der vorhergehenden Anspruche, 
dadurch gekennzeichnet, 

dass der Auswertebereich wenigstens den Fernlichtbereich 
umfasst . 

6. Verfahren nach einem der vorhergehenden Anspruche, 
dadurch gekennzeichnet, 

dass die mittels der Auswertung im Darstellungsbereich 
detektierten Objekte bei der optischen Darstellung her- 
vorgehoben werden. 

7. Verfahren nach einem der vorhergehenden Anspraiche, 
dadurch gekennzeichnet, 

dass die Information uber die bei der Auswertung im Aus- 
wertebereich detektierten Objekte zur weiteren Auswertung 
Fahrzeug-intemen Systemen zur Verfugung gestellt werden. 




Fig. 4 
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DaimlerChrygler AG 



B6pple 



Zusammenf aseung 



Die Erfindung betrifft ein Verfahren zur Umgebungserf assvmg 
mittels einem Automobilen Nachtsicht system mehrere Bereiche 
umfassend. Dazu gehdren ein Erf assungsbereich, worin Umge- 
bungsdaten erfasst werden. Einen Auswertebereich innerhalb 
dem die mittels dem Nachtsichtsystem erfassten Umgebungsdaten 
einer Auswertung unterzogen werden. Sowie einen Darstellungs- 
bereich, wobei Information von den darin erfassten Umgebungs- 
daten mittels einer optischen Anzeige dem Fahrer dargestellt 
wird. Alle bisher kommerziell verfugbaren Nachtsichtsysteme 
sind derart ausgelegt, dass sie Objekte in mSglichst groSer 
Entfemung anzeigen k<«)nnen. Sie bergen jedoch die groiSe Ge- 
fahr, dass der Fahrer in Situationen schlechter Sicht oder 
bei Dunkelheit dazu verleitet wird, schneller zu Fahren als 
dies ohne Nachtsichtsystem moglich ist. Daher wird bei dem 
erf indungsgemaSen Verfahren zur Umgebungserf assiong der Dar- 
stellungsbereich eingeschrankt . Die Einschrankung erfolgt da- 
bei derart, dass der Darstellungsbereich maximal den Fern- 
lichtbereich umfasst. Aufgrund der Einschrankung des Darstel- 
lungsbereichs werden dem Fahrer nur diejenigen Umgebungsdaten 
angezeigt, die er bei Aktivierung des konventionellen Fern- 
lichts ohnehin sehen wiirde. 



Pig. 1 
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Fig. 2 



